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(57) Abstract: The invention relates to a method for a hair colour consultation or a hair colour simulation. According to the inventive 
method, a selection of a person's (11) desired hair colours (36) is represented on a display screen (14,15) or a touch screen (22,23), 
by means of a video camera (12), a computer (13) and at least one display screen or touch screen. Actual individual images (21) 
of the person (1 1) are continuously recorded by means of the video camera (12) and are transmitted into the computer (13) in real 
time, in a continuous image sequence. Automatic image editing and image processing is carried out for each individual image (21) 
by means of a device (31) wherein the computer identifies (13) the person's (11) hair region (32), changes the hair colour (33) of 
said hair region (32) according to pre-determined specifications, and the modified individual images (21) are represented in real time 
again on at least one display screen (14, 15) and/or touch screen (22,23). 
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(57) Zusammenfassung: Verfahren fur eine Haarfarbberatung beziehungsweise Haarfarbsimulation, bei dem mittels einer Vide- 
okamera (12), eines Computers (13) und mindestens eines Bildschirms (14,15) bzw. Touchscreen (22,23) eine Auswahl einer ge- 
wQnschten Haarfarbe (36) einer Person (1 1) auf dem Bildschirm (14,15) bzw. Touchscreen (22,23) dargestellt wind, wobei aktuelle 
Einzelbilder (21) von der Person (1 1) mittels der Videokamera (12) kontinuierlich aufgenoramen und in einer kontinuieriichen Bild- 
folge in den Computer (13) in Echtzeit ubertragen werden, wobei fur jedes Einzelbild (21) mittels einer Einrichtung (31) eine auto- 
matische Bildbearbeitung und Bildverarbeitung durchgefuhrt wird, bei der der Computer (13) einen Haarbereich (32) der Person (1 1) 
identifiziert, die Haarfarbe (33) dieses Haarbereich (32) nach vorgegebenen Spezifikationen andert und die veranderten Einzelbilder 
(21) wiederum in Echtzeit auf mindestens einem Bildschirm (14, 15) oder/und Touchscreen (22,23) darstellt werden. 
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Verfahren fUr eine Haarfarbberatung 

Die Erfindung betrifft ein Verfahren fQr eine Haarfarbberatung nach der Gattung 
des Oberbegriffs des Anspruchs 1. 

Ein derartiges Verfahren fQr eine Haarfarbberatung ist beispielsweise aus der 
5 EP1147722A1 bekannt, das mit einer statischen, digitalen Portraitaufnahme 

arbeitet und bei dem wahlweise eine gewunschte Frisurfarbe eingegeben und auf 
einem Bildschirm (Display) dargestellt wird. 

Vor einer Entscheidung zu einer neuen Haarfarbe hat eine Person, beispielsweise 
10 eine Friseurkundin, eine Hemmschwelle zu Qberwinden, weil sie vorher nicht 
weift, wie sie nachher aussehen wird. Urn hier auch den Friseur bei seiner 
Beratungstatigkeit zu unterstutzen, wird mit dem Haarfarbberatungs- 
Computersystem nach der EP1147722A1 ein zweidimensionales Bild (Digitalfoto) 
einer Person mit einer neuen simulierten Haarfarbe versehen und auf einem 
15 Bildschirm dargestellt, wobei das Ergebnis statisch und unnaturlich aussieht. Ein 
Grund, warum die Ergebnisse herkSmmlicher Haarfarbberatungs- 
Computersysteme statisch wirken, ist, dass sie durch ein Stehbild statisch sind. 
Ein Foto kann kein bewegtes, lebendiges Bild ersetzen, wie es die Person 
beispielsweise erfahrt, wenn sie sich nach der Behandlung im Spiegel betrachtet. 

20 

Der Erfindung liegt die Aufgabe zu Grunde, ein gattungsgleiches Verfahren fur 
eine Haarfarbberatung zu schaffen, das die genannten Nachteile nicht aufweist. 

GelOst wird diese Aufgabe nach den Merkmalen des kennzeichnenden Teils des 
25 Anspruchs 1. Durch dieses Verfahren fur eine Haarfarbberatung ist es moglich, 
das Ergebnis einer Haarfarbung vor der eigentlichen Farbveranderung zu 
visualisieren. Im Gegensatz zu bestehenden Haarfarbberatungssystemen basiert 
es einerseits auf einem dynamischen Videobild und andererseits auf einer 
Farbveranderung der naturlichen Haare der Person. Das Videobild wird durch das 
30 Verfahren in Echtzeit bearbeitet und auf einem Bildschirm wiedergegeben, so 
dass der Eindruck einer Spiegelbenutzung entsteht Weitere vorteilhafte 
Weiterbildungen der Erfindung gehen aus den Unteranspruchen hervor. 
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Die Erfindung bildet wahlweise ein Betrachten eines seitenrichtigen Bildes oder 
eines eigenen Spiegelbildes nach. Dazu wird mit einer Videokamera das aktuelle 
Bild der Person aufgenommen, von einem Computer automatisch bearbeitet und 
auf einem Bildschirm dargestellt. Durch diese dynamische Darstellung in Echtzeit 
wird der Bildschirm zum Spiegel. Die Aufgabe des Computers 1st, das 
Ausgangsbild so zu modifizieren, dass das Ergebnis einer Haarfarbung simuliert 
wird. Zu diesem Zweck muss das Computersystem die Haare der Person 
selbststandig erkennen und daraufhin deren Farbe nach dessen Vorgaben, bzw. 
nach den Vorgaben des Friseurs, verandem. Auf diese Weise entsteht ein 
dynamisches, natOrlich wirkendes Simulationsergebnis. Da lediglich das sich 
bewegendes Eigenhaar umgefarbt wird, entfallt der Effekt von aufgesetzt 
wirkenden „ComputerperOcken" mit einer entsprechenden Farbgebung. Die Haare 
fallen natOrlich, sind nicht starr, und die Person kann sich vor dem virtuellen 
Spiegel bewegen, den Kopf drehen, sich von der Seite betrachten, den 
Gesichtsausdruck andern und sich mit der neuen Haarfarbe selbst beurteilen, ob 
die ausgewahlte Wunschhaarfarbe 32 der Erwartung entspricht. Wenn nicht, 
k6nnen sofort andere Wunschhaarfarben 32 simuliert werden. 

Die Erfindung wird an Hand eines Ausfuhrungsbeispiels naher beschrieben. 
Es zeigt: 

Fig. 1 einen schematischen Ablauf eines Verfahrens fOr eine Haarfarbberatung 

als ein Haarfarbberatungssystem; 
Fig. 2 einen schematischen Ablauf eines Verfahrens fur eine Haarfarbberatung 

mit einem Bildschirm in einer Spiegelbilddarstellung einer Person; 
Fig. 3 einen Bildschirm bzw. Touchscreen mit einer Farbpalette bzw. 

Farbkreisflachenspektrum, und 
Fig. 4 ein Flussdiagramm des Verfahrens. 

Die Fig. 1 zeigt einen schematischen Ablauf eines Verfahrens fur eine 
Haarfarbberatung als ein Haarfarbberatungssystem 1, bei dem mittels einer 
Videokamera 12, eines Computers 13 und mindestens eines Bildschirms 14 bzw. 
Touchscreen 22 eine Auswahl und Darstellung einer gewunschten Haarfarbe 36 
einer Person 11 auf dem Bildschirm/ Touchscreen 14,22 dargestellt wird, wobei 
aktuelle Einzelbilder 21 der Person 1 1 von der Videokamera 12 kontinuierlich 
aufgenommen werden. Diese kontinuierliche Bildfolge von Einzelbildern 21 der 
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Videokamera 12 wird in Echtzeit an den Computer 13 Qbertragen. Dort wird fQr 
jedes Einzelbild 21 mittels einer Einrichtung 31 eine automatische 
Bildbearbeitung und Bildverarbeitung durchgefQhrt, bei der der Computer 13 
einen Haarbereich 32 der Person 11 durch Segmentierung identifiziert, was eine 
5 Erkennung und Trennung von relevanten Bildbereichen bedeutet sowie auch 
deren nattlrliche Haarfarbe 33, die Haarfarbe 33 dieses Haarbereiches 32 nach 
vorgegebenen Spezifikationen andert und die veranderten Einzelbilder 21 
wiederum in Echtzeit auf mindestens einem Bildschirm 14, 15 bzw. Touchscreen 
22,23 darstellt. Echtzeit bedeutet in diesem Kontext: mit einer von der Person 11 
10 nicht oder kaum wahrnehmbaren Zeitverzogerung zwischen den einzelnen 

Bildaufnahmen 21 und der Darsteltung am Bildschirm 14, 15 bzw. Touchscreen 
22,23 mit einer flQssigen Darstellung der Bewegungen. Daraus folgt unter 
anderem auch eine minimale BHdrate von ungefahr zehn Einzelbildern 21 pro 
Sekunde. 

15 

Vor einer eigentlichen Simulation mit einer neuen Wunschhaarfarbe 36 werden 
dem Computer 13 gewisse Anfangsparameter mitgeteilt (Initialisierung). Hierzu 
verarbeitet die Einrichtung 31 kontinuierlich und automatisch manuell 
eingegebene Anfangsparameter eines Bildbereichs 34, wobei als mindestens ein 

20 Anfangsparameter ein Haarbereich 32 markiert und von einer wahlweisen 
Wunschhaarfarbe 36 besetzt wird. Als weitere Kombinationen von 
Anfangsparametern konnen vorgesehen werden, bei welchen Bildbereichen 34 es 
sich urn einen Haarbereich 32 und urn einen Hautgrund 35 handelt, und wodurch 
diese charakterisiert werden (Farbtone, Textur, Morphologie usw.), welche 

25 (natOrliche) Ausgangshaarfarbe 33 vorherrscht und welche Farbe 

(Wunschhaarfarbe 36) gewOnscht wird. Das kann Ober Anwahlen Oder Maskieren 
von Bildbereichen 34 oder Schaltflachen eines oder mehrerer BedienmenQs auf 
dem Bildschirm 14, 15 bzw. Touchscreen 22,23 geschehen. Die zu diesem Zweck 
erforderlichen Eingabegerate konnen beispielsweise als Maus 17 oder ahnliches 

30 (Trackball, Touchpad usw.), als Tastatur 16 oder/und als mindestens ein 

Touchscreen 22,23 vorgesehen werden. Die Initialisierungsphase kann unter 
anderem notig sein, urn dem Computer 13 mitzuteilen, welche Bildbereiche 34 
des Haarbereichs 32 die Frisur 37 darstellen, die vom restlichen Bild separiert 
und umgefarbt werden soli. Dies kann beispielsweise dadurch geschehen, dass 

35 der Benutzer mindestens in einem der Bildbereiche 34 das Haar 18, die Haut 19 
und einen Hintergrund 38 einen oder mehrere Punkte oder einen oder mehrere 
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Bereiche markiert. Es 1st aulierdem moglich, dass Bereiche markiert werden, die 
explizit nicht umgefarbt werden sollen, wie z. B. Augenbrauen, Koteletten oder 
Bart. Um dem Computer 13 die Erkennung der Haarbereiche 32 zu erleichtern 
und die Fehleranfailigkeit des Haarfarbberatungssystems 1 gering zu halten, ist 
5 es vorteilhaft, ein Bild von einer Person 1 1 vor einem homogenen, einfarbigen 
Hintergrund 38 mit moglichst einer definierten Beleuchtung aufzunehmen. 

Der Haarbereich 32 wird durch eine automatische Analyse naheliegender und 
ahnlicher Pixelfarbwerte kontinuierlich markiert und von der Wunschhaarfarbe 36 

10 entsprechend besetzt, woraus sich ein einfaches NachfOhrverfahren des durch 
Bewegung der Person 11 sich laufend andernden Haarbereichs 32 ergibt. Hierzu 
wird zur Analyse naheliegender und ahnlicher Pixelfarbwerte ein reprasentativer 
Teilbereich des Haarbereichs 32 manuell ausgewahlt und dann die automatische 
Analyse gestartet, wodurch die Einrichtung 31 zur kontinuierlichen 

15 Bildbearbeitung lediglich den Haarbereich 32 mit der Wunschhaarfarbe 36 zu 

bearbeiten hat. Dieser automatischen Markierung liegt die Oberlegung zu Grunde, 
dass die Ausgangshaarfarbe 33 im Haarbereich 32 eine zusammenhSngende 
FlSche naheliegender und ahnlicher Pixelfarbwerte aufweist, die sich vom ubrigen 
Bildbereich 34 deutlich differenzieren lassen. 

20 

Der Haarbereich 32 kann aber wahlweise durch eine automatische Analyse einer 
zusammenhangender Textur oder/und zusammenhangender geomorphologischer 
Elgenschaften kontinuierlich markiert werden, um den ubrigen Bildbereich 34 
deutlich zu differenzieren. 

25 

Je nach Anwendungsbereich (Friseur/Retail) kann auRer der Person 11 auch ein 
Berater, zum Beispiel ein Friseur, anwesend sein. In diesem Fall ist es sinnvoll, 
wenn der Friseur fur die Programmbedienung und Initialisierung einen eigenen, 
zweiten Bildschirm 15 bzw. Touchscreen 23 zur VerfQgung hat. Auf diesem 

30 zweiten Bildschirm 15 bzw. Touchscreen 23 konnen zusatziich zu dem 

Kamerabild fOr die Bedienung wichtige Informationen dargesteilt werden, zum 
Beispiel die Farbpalette 47 (Fig. 3) der Zielhaarfarben (Wunschfarbe 36), so dass 
auf dem ersten Bildschirm 14 bzw. Touchscreen 22 fQr die Person 1 1 nur das 
Simulationsergebnis sichtbar zu sein braucht. Der Touchscreen 22,23 hat den 

35 Vorteil, dass weitere Eingabegerate OberflOssig sind, da entsprechende 
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BedienmenQs oder Schaltflachen direkt durch Antippen mit einem Finger oder 
Stift auf der Touchscreen-Oberfiache aktiviert werden. 

In einer bevorzugten AusfOhrung werden die kontinuierlichen Videobilder der 
5 Person 1 1 vom Computer 13 stetig um eine vertikale Achse gespiegelt auf dem 
Bildschirm 14 als ein Spiegelbild 39 dargestellt (Fig. 2). Dadurch wird der 
Eindruck erzeugt, als betrachte man sich in einem Spiegel, was den alltaglichen 
Gewohnheiten entgegen kommt und den ungezwungenen Umgang mit dem 
Haarfarbberatungssystem 1 fordert. Um eine Parallaxe zwischen der 

10 Videokamera 12 und dem Bildschirm 14,15 bzw. Touchscreen 22,23 zu 

minimieren, sollte die Videokamera 12 dicht am oberen Rand des Bildschirms 
14,15,22,23 positioniert sein, wie beispielsweise nach der DE19635753A1, Fig. 4. 
Im Idealfall fallt die optische Achse des Videobildes 34 mit der optischen Achse 
des Bildschirms 14,15 bzw. Touchscreen 22,23 zusammen, um die Parallaxe 

15 vollstSndig zu vermeiden. Eine entsprechende Losung ist beispielsweise auch in 
der DE19635753A1 zu Fig. 5 beschrieben. Um den Effekt eines Spiegels zu 
perfektionieren, sollte der Abbildungsmalistab von der Person 11 und des 
Bildschirms 14,15 bzw. Touchscreen 22,23 ungefahr 1:1 sein. 

20 In einer besonderen Ausbildung ist vorgesehen, die Haarfarbe 33 kontinuierlich 
und in einem Zyklus nach einem Farbkreisflachenspektrum 48 (Fig. 3) zu 
verandern, wobei ein Start oder Stopp dieser laufenden Farbveranderung 
vorgesehen ist. Dadurch entfallt eine gezielte Eingabe einer Wunschhaarfarbe 36 
aus einer Farbpalette 47, da in dem Moment, wo eine Person 1 1 glaubt, einen zu 

25 ihr passenden Farbton gefunden zu haben, die laufende Farbveranderung einfach 
stoppt und auch noch in diesem Bereich den gestoppten Farbton manuell 
verschieben kann, bis die eigentliche Wunschhaarfarbe 36 getroffen ist. Der 
Zyklus der laufenden Farbveranderung ist in seiner Wiederholfrequenz frei 
wahlbar, wodurch dieser individuell an eine Person 11 angepasst werden kann. 

30 Diese laufende Farbveranderung eignet sich auch besonders gut fOr eine 

werbewirksame Demonstration fOr eine Haarfarbveranderung einer Kundin 11 in 
beispielsweise einem Drogeriemarkt, wobei wahlweise zur Werbung ein 
entsprechender Videofilm auf dem Bildschirm 14,15 gezeigt werden kann. 

35 In der Fig. 4 ist ein schematisches Flussdiagramm des Verfahrens dargestellt. 
Neben einer Eingabe einer Bildaufnahme 40, wobei es ein bewegtes Videobild 
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Oder zunachst nur ein Einzelbild 21 sein kann, ist gegebenenfalls eine Eingabe 
von Zusatzinformationen 41 (beispielsweise vom Friseur bestimmte 
Ausgangshaarfarbe der Kundin und/oder der Grauanteil, aber auch allgemelne 
Kundendaten) vorgesehen sowie eine Eingabe einer Auswahl einer 
5 Wunschhaarfarbe 36 und eine Eingabe einer Markierung 42 mindestens eines 
Bildbereichs 34, wobei die Reihenfolge beliebig ist. Diese Daten fliefcen in eine 
Initialisierungseinrichtung 43 ein, in der das Verfahren gestartet wird und in eine 
Segmentierungseinrichtung 44 einflieften, in der eine Erkennung und Trennung 
von relevanten Bildbereichen 34 erfolgt. Nach einer Transformation der 

10 Ausgangshaarfarbe 33 in die vorgegebene Wunschhaarfarbe 36 in einer 

Farbtransformationseinrichtung 45 erfolgt eine entsprechende Bilddarstellung 46 
eines Einzelbildes 21 einer Person 11 mit der Wunschhaarfarbe 36 auf einem 
Bildschirm 14,15 bzw. Touchscreen 22,23. Die nSchstfolgenden Einzelbilder 21 
der Videoaufnahme werden entsprechendend verarbeitet und fortlaufend 

15 dargestellt, wobei eine Bildwiedergabefrequenz von ungefahr 10 bis 30 Bilder pro 
Sekunde vorgesehen ist, wodurch ein fliefiendes, bewegtes Bild entsteht. Es 
kann aber auch vorgesehen werden, dass lediglich eine Wunschhaarfarbe 36 zur 
Initialisierung ausreicht, wenn die ubrigen Parameter bzw. Spezifikationen 
automatisch erfasst und verarbeitet werden. 

20 

Da nur ein Teilaspekt des realen Bildes modifiziert wird, gibt es keine 
Diskrepanzen zwischen realen und virtuellen Bildelementen, wie beispielsweise 
Winkel- und Positionsungenauigkeiten, unterschiedlicher Beleuchtung der 
verschiedenen Bildelemente, Skalierungsfehler usw. Auch gibt es keine 
25 Verdeckungsproblematik, da nicht berechnet werden muss, welche Telle des 

virtuellen Bildelements vom realen Bild verdeckt werden. Da das reaie Bild nur in 
der Farbe verSndert wird, verhait sich das Haar einer Person automatisch 
physikalisch korrekt, was eine natOrliche Wirkung auch einer Bewegung der 
Person bei der Wiedergabe auf dem Bildschirm bzw. Touchscreen bewirkt. 
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Eingabetastatur 
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Haar 
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Haut 
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Einzelbild 
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Erster Touchscreen 
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Zweiter Touchscreen 


31 


Einrichtung 
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Haarbereich 


33 


Ausgangshaarfarbe 


34 


Bildbereich 


35 


Hautgrund 


36 


Wunschhaarfarbe 


37 


Frisur 


38 


Hintergrund 


39 


Spiegelbild 


40 


Biidaufnahme 


41 


Zusatzinformationen 


42 


Markierung 


43 


Initialisierungseinrichtung 


44 


Segmentierungseinrichtung 


45 


Farbtransformationseinrichtung 


46 


Bilddarstellung 


47 


Farbpalette 
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Farbkreisflachenspektrum 
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Patentanspruche 

1. Verfahren fGr eine Haarfarbberatung beziehungsweise Haarfarbsimulation, bei 
dem mittels einer Videokamera, eines Computers und mindestens eines 
Bildschirms eine Auswahl einer gewQnschten Haarfarbe einer Person auf dem 
Bildschirm dargestellt wird, dadurch gekennzeichnet, dass aktuelle Einzelbilder 
5 (21) von der Person (11) mittels der Videokamera (12) kontinuierlich 

aufgenommen und in einer kontinuierlichen Bildfolge in den Computer (13) in 
Echtzeit ubertragen werden, wobei filr jedes Einzelbild (21) mittels einer 
Einrichtung (31) eine automatische Bildbearbeitung und Bildverarbeitung 
durchgefuhrt wird, bei der der Computer (13) einen Haarbereich (32) der Person 
10 (11) identifiziert, die Haarfarbe (33) dieses Haarbereichs (32) nach vorgegebenen 
Spezifikationen andert und die verSnderten Einzelbilder (21) wiederum in Echtzeit 
auf mindestens einem Bildschirm (14, 15) oder/und Touchscreen (22,23) darstellt 
werden. 

15 2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die Einrichtung 

(31) manuell eingegebene Anfangsparameter eines Bildbereiches (34) zur 
Initialisierung kontinuierlich automatisch verarbeitet, wobei als mindestens ein 
Anfangsparameter der Haarbereich (32) markiert und von einer wahlweisen 
Wunschhaarfarbe (36) besetzt wird. 

20 

3. Verfahren nach Anspruch 2, dadurch gekennzeichnet, dass der Haarbereich 

(32) durch eine automatische Analyse naheliegender und ahnlicher 
Pixelfarbwerte der Ausgangshaarfarbe (33) kontinuierlich markiert wird. 

25 4. Verfahren nach Anspruch 2, dadurch gekennzeichnet, dass der Haarbereich 
(32) durch eine automatische Analyse einer zusammenhangender Textur 
oder/und zusammenhangender geomorphologischer Eigenschaften kontinuierlich 
markiert wird. 

30 5. Verfahren nach mindestens Anspruch 1, dadurch gekennzeichnet, dass die 
Wunschhaarfarbe (36) wahlweise von mindestens einem Touchscreen (22,23) 
oder/und von mindestens einem Bildschirm (14,15) durch eine Eingabetastatur 
(16) oder durch eine Maus (17) in den Computer (13) eingegeben wird. 
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6. Verfahren nach mindestens Anspruch 1, dadurch gekennzeichnet, dass die 
Bildfolge von mehreren Einzelbildern (21) mindestens vom Bildschirm (14) fur die 
Kundin (11) ais ein Spiegelbild (39) dargestellt wird. 

5 7. Verfahren nach mindestens Anspruch 1, dadurch gekennzeichnet, dass die 
Haarfarbe (33) kontinuierlich und in einem Zyklus nach einem 
Farbkreisflachenspektrum (48) verandert wird, wobei ein Start oder Stopp dieser 
laufenden Farbveranderung vorgesehen ist. 

10 8. Verfahren nach Anspruch 7, dadurch gekennzeichnet, dass der Zyklus in 
seiner Wiederholfrequenz frei wahlbar ist. 
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